OpenAI：ChatGPT将遵守爬虫协议，网站可拒绝白嫖

... 禁止访问网站的爬虫或禁止爬虫抓取的内容。 根据这一协议，即使在有能力访问的情况下，爬虫遇到相关内容都会主动选择避开。 ChatGPT自身也在使用robots.

根据这一说明，内容拥有者将可以拒绝网站数据被ChatGPT的爬虫抓取。 ... 这其实是一种用户协议，站主可以在其中设置禁止访问网站的爬虫或禁止爬虫抓取的内容。

与大多数其他网络爬虫一样，可以通过修改网站的robots.txt 协议（也称为机器人排除协议）来阻止GPTBot 访问您的网站。 此.txt ...

除了使用robots.txt 指示詞外，還可以使用OpenAI 所公布的GPTBot 所使用的IP 網段，直接在網站伺服器內阻擋這些IP 位址（取得最新IP 網段）來防止ChatGPT 存取網站內容。 IP ...

如何禁止GPTBot 爬蟲爬你的網站資料 大家都知道目前ChatGPT 的資料只到 ... 禁止 爬蟲呢? 很簡單，只要到你的網站網址，後面加上 /robots.txt 就 ...

德國資安研究員Benjamin Flesch發現OpenAI的ChatGPT爬蟲存在一個嚴重安全漏洞，此漏洞可被利用發起分散式阻斷服務(DDoS)攻擊，對全球網站的運作造成威脅。

根据这一说明，内容拥有者将可以拒绝网站数据被ChatGPT的爬虫抓取。 ... 这其实是一种用户协议，站主可以在其中设置禁止访问网站的爬虫或禁止爬虫抓取的内容。

為了提供幫助，我們新增了全新的一鍵式封鎖所有AI 機器人的功能。所有客戶均可使用此功能，包括免費方案的客戶。要啟用此功能，只需導覽到Cloudflare 儀表板 ...

根据这一协议，即使在有能力访问的情况下，爬虫遇到相关内容都会主动选择避开。 ChatGPT自身也在使用robots.txt，阻止爬虫抓取除了用户分享之外的其他内容。